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(57) Abstract 

The invention relates to a method for detecting 
an object which comprises the following steps: cap- 
ture of data or an image, whereby image data are de- 
temiined from a representation of a scene; and classifi- 
cation of the colours of at least one predefined object 
found in said scene to determine a perceived object 
colour. A mean colour parameter, which is essentially 
constant for the entire object, is assigned by means 
of a fuzzy control classification of all image points of 
the object to one particular colour class from a plu- 
rality of colour classes in a defined colour zone. The 
assigned colour class of the object colour corresponds 
to the visually perceived colour of the object in the 
scene. The invention further relates to a visual aid for 
carrying out said method. 

(57) Zusammenfassung 

Ein Verfahren zur Objekterfassung umfaBl 
die Schritte: Daten- oder Bildaufnahme, bei 
der aus einer Abbildung einer Szene Bilddaten 
ermiltelt werden, und Farbklassifizierung ftlr 
mindestens ein vorbestimmtes Objeki der Szene 
zur Ermittlung einer wahrgenommenen Objektfarbc, 
wobei ein fOr das gesamte Objekt im wesentlichen 
konstantcr, mittlerer Farbparameter mit einer 

Fuzzy-Conlrol-Klassifizierung aller zum Objekt gehSrcnden Bildpunkte einer Farbklasse unter einer Vielzahl von Farbklassen in einem 
vorbestimmten Farbraum zugeordnet wird, wobei die zugcordnete Farbklasse der Objektfarbc der visuellcn Farbwahmehmung des Objekts 
in der Szene entspricht. Es wird auch cine Sehhilfevorrichtung zur Implementierung des Verfahrens beschrieben. 
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Verfahren und Vorrichtunq zur Erfassung von Objektfarben 

Beschreibung 

Die Erfindung betrifft Verfahren zur optischen Objekterf assung, 
insbesondere zur Erfassung von Objekt- und Segmentf arben (im 
folgenden kurz: Objektfarben), aber auch zur Erfassung geome- 
trischer Objekteigenschaf ten, wie z.B. die GroBe, Position und 
Entfernung von Objekten in einer Bildszene, und Vorrichtungen 
zur Anwendung der Verfahren. Unter Erfassung von Objektfarben 
wird allgemein die Ermittlung der Wahrnehmung von Objektfarben 
und somit die Ermittlung einer Farbangabe (z. B. Angabe einer 
Farbwahrnehmungsklasse) zu einem erfafiten Objekt verstanden, 
die ein Beobachter des Objekts in der aktuellen Szene bei 
visueller Betrachtung zur Bezeichnung seiner Farbwahrnehmung 
nennen wurde oder wie sie in anderen psycho-physischen Experi- 
menten objektiv bestimmt werden konnen (z.B. Nachmischen von 
Farben, Detektion, experimentelle Kompensationsexperimente) . 

Das menschliche visuelle System ist dazu eingerichtet, in 
Bruchteilen von Sekunden beim Beobachter Eigenschaf ten einzel- 
ner Objekte oder Segmente im Gesichtsfeld bewuBt werden zu las- 
sen. Die betrachteten Objekte werden durch Inf ormationen aber 
die Farbe, GroBe und Entfernung und dgl. erfafit, wodurch insbe- 
sondere ein sicheres Bewegen im Raum erraoglicht wird. Die 
visuelle Objekterkennung erfolgt durch eine Erfassung von Ob- 
jekt- Oder Segmentgrenzen und eine Zuordnung von Objektfarben, 
denen auf der Grundlage der Erfahrung eine bestimmte Bezeich- 
nung zugeordnet wird. Die Wahrnehmung von Objektfarben und 
-grenzen stehen in gegenseitiger Wechselwirkung . Die exakten 
Zusammenhange bezuglich der Funktionsweise dieser Wechselwir- 
kung im menschlichen Gehirn sind erst teilweise verstanden. Im 
Falle von Storungen im visuellen System (z.B. bei Blindheit 
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Oder Farbenblindheit ) wird die Objekterkennung ganz Oder teil- 
weise beeintrachtigt , woraus sich z.B. Orientierungsprobleme 
ergeben. 

Es sind verschiedene Systeme bekannt, um blinden oder sehschwa- 
chen Personen die Erkennung von Gegenstanden oder deren Be- 
trachtung zu ermoglichen oder zu erleichtern. Auf der Grundlage 
des Global Positioning System (GPS-System) wurde ein "Personal 
Guidance System" genanntes, satellitenges teuertes Leitsystem 
entwickelt, mit dem sich Personen mit Sehstorungen mit Hilfe 
eines elektronischen KompaB wichtige Orte wie z.B. Bushalte- 
stelle Oder Telef onzellen orten lassen konnen. Bei diesem Sy- 
stem erfolgt keine Objekterkennung. Es ist nur fur Objekte an- 
wendbar, die in den sys teminternen Topografien gespeichert 
sind. Damit ist das GPS-System auf spezielle Anwendungen, z.B. 
im offentlichem stadtischen Raum, beschrankt und beispielsweise 
in engen^ geschlossenen Raumen mit zahlreichen, ggf . bewegli- 
chen Gegenstanden nicht nutzbar. 

Es ist ferner ein als Sehhilfe fiir Personen mit reduzierter 
Sehleistung, kommerziell angebotenes Farberkennungsgerat be- 
kannt ("Color Test 150", Anbieter Care Tec Deutschland GmbH), 
bei dem mit einem Sensor punktweise eine Farbmessung erfolgt, 
deren Ergebnisse (Farbton, Helligkeit und Sattigung des vermes- 
senen Punktes) uber einen Lautsprecher ausgegeben werden. Die 
lokale Farbmessung mit einem einzigen Sensor besitzt die fol- 
genden Nachteile. 

Die menschliche oder visuelle Farbwahrnehmung in Bezug auf ei- 
nen bestimmten Bereich im Gesichtsfeld (Punkt, Objekt, Segment) 
ist einerseits von rein lokalen Eigenschaf ten dieses Bereichs 
abhangig (hauptsachlich vom lokalen Ref lexionsgrad und von der 
spektralen Energieverteilung der Beleuchtung bzw. bei Selbst- 
leuchtern von der ausgesandten Strahlung) . Andererseits ist die 
menschliche Farbwahrnehmung auch von der Umgebung des betrach- 
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teten Bereiches abhangig. So laftt sich z.B. allein durch Ande- 
rung der Umgebung die wahrgenommene Farbe beeihf lussen^ was 
sich beispielsweise beim simultanen Farbkontrast bzw. bei der 
Farbinduktion und in extremer Form beim sogenannten Land-Effekt 
zeigt. Der Umgebungseinf luB auf die wahrgenommenen Farben eines 
bestimmten Bereiches nimmt mit zunehmenden Abstand ab. Die un~ 
mittelbare Umgebung ist somit von besonderer Bedeutung fur die 
Farbwahrnehmung. In welcher Weise die Gradienten, die durch die 
Form von Objekten oder durch Inhomogeni taten der Beleuchtung 
hervorgeruf en werden, sich auf die Farbwahrnehmung auswirken, 
ist bislang nur teilweise geklart. So ist beispielsweise die 
Farbkonstanzleistung des Gehirns (Invarianz der wahrgenommenen 
Objektfarbe bezuglich Beleuchtungsanderungen) erst zum Teil 
verstanden {siehe Publikation ^^Computational models of color 
constancy'' A. C. Hurlbert in ^Perceptual Constancy'', Hrsg. V. 
Walsh et al., Cambridge University Press, Cambridge, 1998). 

Beim lokal messenden Farberkennungsgerat werden die Umgebungs- 
farben nicht berucksichtigt, so dali die Farbwahrnehmung im all- 
gemeinen verfalscht angegeben wird. 

Aufierdem muB das Farberkennungsgerat in die Nahe des zu messen- 
den Objektes gebracht werden. Die Messungen beziehen sich nur 
auf die implementierten Lichtarten, so daft bereits die lokale 
Farbmessung starken Einschrankungen unterworfen ist. So 
schliefit eine Punktmessung aus, dafi zwischen Objekt- und Be- 
leuchtungsf arbe unterschieden werden kann, sofern nicht eines 
von beiden bekannt ist. Fur Farbwahrnehmungen, die stark von 
der Umgebung abhangen, wie z.B. "Braun'' oder "Grau", kann das 
Gerat bauartbedingt keine richtigen Ergebnisse liefern. 

Weitere Nachteile des herkommlichen Farberkennungsgerates be- 
stehen darin, dafi keine Angaben uber geometrische Objekteigen- 
schaften wie z.B. die ObjektgroBe oder die Entfernung bestimm- 
ter Objekt im Raum geliefert konnen. Aufterdem ist es nicht mog- 
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lich, Farben des Hintergrundes (z.B. des Himmels bzw. von Hin- 
tergrundsegmenten) zu vermessen. 

Das Interesse an einer Farberkennung, mit der die menschliche 
Farbwahrnehmung simuliert wird, ist nicht auf das Gebiet der 
Sehhiifen beschrankt. Es besteht vielmehr auch im Bereich der 
Druck-, Lebensmittel- und Chemieindustrie sowie im Graphik- und 
Designbereich ein Bedarf an moglichst objektiven Mitteln zur 
Objekterfassung, insbesondere zur Erfassung der Farbwahrnehmung 
von farbigen Produkten. 

In der Publikation von Q. Chen et al . in ,,Proc. of IEEE Intern. 
Conference on Computer Vision,, Cambridge, MA, USA, 1995, Seite 
591 ff., ist ein Verfahren zum Erkennen menschlicher Gesichter 
in Bildern auf der Grundlage der Erfassung der Gesichtsf arbe 
bekannt. Dabei wird einzelnen Bildpixeln unter Verwendung einer 
Fuzzy-Klassif izierung jeweils eine Farbe zugeordnet und diese 
Farbe in Bezug auf die Zugehc^rigkeit zu bestimmten Gesichtsfar- 
ben untersucht. Die pixelweise Klassif izierung erlaubt allge- 
mein keine Ruckschlusse auf die durch einen Beobachter wahrge- 
nommmene Farbe. Nur in Kombination mit anderen Eingangsinf orma- 
tionen (geometrische Inf ormationen oder Inf ormationen aus Ver- 
gleichsbeispielen) ware eine Zuordnung zu Wahrnehmungsklassen 
m5glich. Dies kann fur spezielle Objekte mit bekannten charak- 
teristischen Eigenschaf ten sinnvoll sein, besitzt aber in Anbe- 
tracht der praktisch unendlichen Zahl von Objekten und Betrach- 
tungsbedingungen eine ungenugende Leistungsf ahigkei t . Dies gilt 
insbesondere bei der Anwendung als Sehhilfe, bei der im ailge- 
meinen keine Zusatzinf ormationen uber Objekte im Sehfeld gege- 
ben sind. Die Technik gemaft Q. Chen et al. ist fur eine allge- 
mein anwendbare Farberkennung mit Simulierung der menschlichen 
Farbwahrnehmung somit ungeeignet. 

Ein weiteres Farbklassif ikationsver f ahren ist aus der Publika- 
tion von K.-H. Franke et al . in „Mustererkennung 1994^\ 16. 
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DAGM-Symposium, Wien, Springer-Verlag, Seite 624 ff., bekannt, 
das speziell auf die Erkennung von Mikrodef ekten auf Halblei- 
teroberf lachen zugeschnitten ist. Dieses Verfahren ist im we- 
sentlichen durch dieselben Beschrankungen nachteilig, die oben 
unter Bezug auf die Gesichtserkennung genannt wurden. So er- 
folgt eine Farbauswertung an Einzelpixeln unter der Vorgabe 
vorbestimmter Modellfarben. Eine Aussage uber eine menschiiche 
Farbwahrnehmung ist damit bestenfalls fur die bekannten Halb- 
leiterstrukturen und deren bekannte Fehler mbglich. Schon beim 
Auftreten neuer (unbekannter ) Fehler wurde dieses herkbmmliche 
Verfahren versagen. 

Es ist die Aufgabe der Erfindung, verbesserte Verfahren zur op- 
tischen Ob jekterf assung anzugeben, die insbesondere eine Farb- 
angabe zu einem erfaftten Objekt erm5glichen, die radglichst ge- 
nau und reproduzierbar an die menschiiche Farbwahrnehmung ange- 
•pafit ist und die einen erweiterten Anwendungsbereich in Bezug 
auf erfaftbare Objekte und/oder die technischen Anwendungsmog- 
lichkeiten besitzen. Die Aufgabe der Erfindung ist es auch, 
Vorrichtungen zur Implementierung derartiger Verfahren anzuge- 
ben . 

Diese Aufgabe wird durch ein Verfahren bzw. eine Vorrichtung 
mit den Merkmalen gemaB Anspruch 1 bzw. 15 gelost. Ausfuhrungs- 
formen und Verwendungen der Erfindung ergeben sich aus den ab- 
h^ngigen Anspruchen. 

Das erf indungsgemafte Verfahren umfaBt insbesondere eine Daten- 
oder Bildaufnahme, eine Bildsegmentierung, bei der ein bestimm- 
tes Objekt oder Bildsegment aufgrund eines fur dieses Objekt im 
wesentlichen unveranderlichen Bildparameters von benachbarten 
Objekten abgegrenzt wird, und eine Klassif izierung der Objekt- 
farbe durch Zuordnen von Farbparametern des segmentierten Ob- 
jekts zu einem bestimmten Farbwert in einem Farbraum. Die Bild- 
aufnahme erfolgt vorzugsweise mit einer Bildauf nahmeeinrich- 
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tunc die zur Abbildung einer Objektanordnung in einer Szene 
und zur Bereitstellung vollst.ndiger Bilddaten (Helligkeits- 
und/oder Farbwerte) des auf genommenen Bildes, vorzugsweise xn 
digitalisierter Form, eingerichtet ist. Der zur Bildsegn.antie- 
rung bevorzugt herangezogene Bildparameter ist der Farbton. Die 
Objektklassifizierung erfolgt vorzugsweise unter Verwendung von 
Methoden der Fuzzy-Logik, wie z.B. Fuzzy-Clustering und/oder 
Fuzzy-Control . 

Gem.B einer bevorzugten Ausf Uhrungsf orm der Erfindung erfolgt 
nach der Bildsegmentierung eine Segmentreduzierung, die auf ex- 
ne vereinfachung der Komplexit.t der Szene gerichtet ist. Bex 
der segmentreduzierung werden die Bildpunkte, die zu dem erfali- 
ten Objekt oder Bildsegment geh5ren und eine fallabh.ngig kom- 
plizierte Segmentgeometrie bilden, durch eine Gruppe von Bxld- 
punkten ersetzt, die eine Segmentf l.che in Gestalt einer regel- 
maMgen, geradlinig oder schwach gekrUounten Grundform, (z B. 
Rechteck, Kreis, Ellipse oder dergleichen, bilden. Das redu- 
zierte Bildsegment wxrd vorzugsweise derart gewahlt, dali es 
vollst.ndig das ursprUngliche Segment abdeckt. Beispielsweise 
ist vorgesehen, daft das zunSchst erfa.te Objekt oder Bildseg- 
ment reduziert wird, indem es vollst.ndig von einem rechteckx- 
gen Rahmen umgeben und die vom Rahmen eingefaBten Bildpunkte 
als das reduzierte Bildsegment erfalit werden. Zur Ermittlung 
eines fUr das reduzierte Bildsegment charakteristischen Bildpa- 
rameters wird Uber alle Farbwerte gemittelt, die den segmen- 
tierten Bereich, also im zunachst nicht reduzierten Bildseg- 
n.ent, auftreten. Die Segmentreduzierung stellt einen unerwarte- 
ten und far die folgende Objektklassif izierung wichtigen Vor- 
teil dar. Es wurde f estgestellt, dali das Ergebnis der erfxn- 
dungsgem..en Farberkennung durch die Segmentreduzierung nicht 
Oder im Rahmen der jeweiligen Anwendung vernachl.ssigbar gerxng 
beeinflulit wird. Aulierdem vereinfacht die Segmentreduzierung 
das im Rahmen der objektklassif izierung durchgef Uhrte Fuzzy- 
Control-Verfahren, dem die Zahl der fur das Fuzzy-Control- 
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Verfahren abzuarbeitenden Entscheidungen auf eine in der Praxis 
annehmbare Zahl reduziert wird. 

Eine erfindungsgemaiJe Vorrichtung erfaBt eine Daten- oder Bild- 
aufnahmeeinrichtung, z.B. eine Digitalkamera, eine Segmentie- 
rungseinrichtung, eine Klassif izierungseinrichtung und eine 
Ausgabeeinrichtung. GemaB einer bevorzugten Anwendung der Er- 
findung bildet die Vorrichtung ein Hilfsgerat fur Sehschwache 
Oder Blinde, das zur Erfassung von Objekten, zur Bestimmung von 
deren GrSfie, Entfernung und Farbe und zur horbaren oder tastba- 
ren Ausgabe dieser GroBen eingerichtet ist. 

Unter optischer Obj ekterf assung wird hier die Erfassung der 
Farbwahrnehmung, GroBe, Position und/oder Entfernung vom Be- 
trachter bzw. von der Bildauf nahmeeinrichtung fUr ein Objekt in 
einer abgebildeten Szene verstanden. Ein Objekt ist ein im 
zweidimensionalen Bild aufgrund eines bestimmten Bildparameters 
der Umgebung unterscheidbarer Ausschnitt (Segment) . 



von 



Bevorzugte Anwendungen der Erfindung liegen im Bereich der Er- 
stellung von Sehhilfen und von MeBgeraten fur die Druck-, Le- 
bensmittel- und Chemietechnik sowie im Graphik- und Designbe- 
reich. Bei der erf indungsgemaB Obj ekterf assung als Sehhilfe 
wird neben der genannten Klassif izierung der Objektfarbe auch 
eine Klassif izierung geometrischer Objektparameter oder eine 
Objekterkennung (z.B. Schrifterkennung) vorgenommen. Die Ausga- 
beeinrichtung ist fur sehbehinderte Personen vorzugsweise durch 
einen Lautsprecher gegeben. Die Sehhilfe erlaubt insbesondere 
die Orientierung und ein sicheres Bewegen im Raum. 

Die Erfindung besitzt die folgenden Vorteile. Mit dem erfin- 
dungsgemaBen System wird reproduzierbar ein Zusammenhang zwi- 
schen physikalischen (photometrischen) MeBgroBen und der 
menschlichen Farbwahrnehmung hergestellt. Dabei werden vorteil- 
hafterweise nicht die Farbmerkmaie einzelner Bildpunkte, son- 
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dern ganzer Bildsegmente und die Farbmerkmale. des Umfeldes der 
Bildsegmente erfalit, die fUr die Farbwahrnehmung von Bedeutung 
sind. Erstmalig warden ein Segmentierungsverf ahren und Elemente 
der Fuzzy-Logik (Eingangs- und AusgangsgrbUen fur die Fuzzy- 
inferenz, Operatoren und Regeln) in einer optimal an die 
menschliche Farbwahrnehmung von unbekannten Objekten in realen 
Szenen (z.B. Lebensraum in taglicher Umgebung) angepaBten Weise 
gewShlt 

Die Erfindung besitzt einen breiten Anwendungsbereich und ist 
insbesondere gut fur Applikationen bei Alltagssituationen an- 
wendbar. Es wird eine Farberkennungseinrichtung geschaffen, die 
neben den photometrischen Meftdaten auch erlaubt, Eigenschaf ten 
der Neurologie, Physiologie und Psychologie des Sehens sowxe 
linguistische, semantische und kulturelle Aspekte der Farbwahr- 
nehmung zu berucksichtigen. Es wird eine zuverlassige Sehhxlfe 
fur Blinde oder Farbf ehlsichtige geschaffen, mit der auch vom 
Betrachter entfernt angeordnete Objekte sicher erfalit und klas- 
sifiziert warden kannen. Es ist mOglich, sowohl die Farbwahr- 
nehmung als auch die GroBen-, Positions- und Entfernungsbestim- 
mung in einem Gerat zu integrieren. Die mit der Erfindung erst- 
raalig simultan implementierte Erfassung sowohl der Farbwahrneh- 
mungsinformation als auch der Entf ernungsinformation stellt ex- 
nen wichtigen Vorteil der Erfindung bei Sehhilf eanwendungen 
dar ES ist die Erfassung verhaltnismaliig komplexer realer Sze- 
nen, auch in kleinen, geschlossenen Raumen mit einer Vielzahl 
von Objekten mbglich. Die erf indungsgemalie Vorrichtung kann aus 
an sich, kommerziell verfugbaren Komponenten aufgebaut sein, so 
daU das system kostengunstig hergestellt warden kann. Dxe er- 
findungsgemalie Vorrichtung lalit sich miniaturisieren, so z.B. 
bis hin zum Aufbau einer wie eine Brille getragenen Sehhilfe, 
wobei die Ausgabeeinrichtung als Ohrhorer implementiert wxrd. 
Die Erfindung ist in der Farbf orschung (Entwicklung von Far- 
braumen und Wahrnehmungsmodellen) anwendbar und fUr spezielle 
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Anwendungen bei Verwendung der Fuzzy-Logik-Methoden optimal 
adaptierbar. 

im Gegensatz zu herkonunlichen Techniken bietet die Anwendung 
der Erfindung als Sehhilfe erstmalig die Moglichkeit fur dxe 
Betroffenen, sich mit Hilfe eines einzigen Cerates im Raum 
orient ieren zu konnen. Ober die Farbinf ormation wird die Orxen- 
tierung und damit ein sicheres Bewegen im Raum ermogUcht. 
Die erfindungsgemalie Erfassung der Farbwahrnehmung besitzt exne 
hohe Stabilitat dahingehend, da. auf der Grundlage von Ent- 
scheidungsregeln, die an einfachen Testobjekten ermittelt wur- 
den, beliebige Bildsituationen der natUrlichen Umwelt zuverlas- 
sig ausgewertet werden k5nnen. 

Weitere Vorteile und Einzelheiten der Erfindung werden im fol- 
genden unter Bezug auf die beigefUgten Figuren beschrieben. Es 
zeigen 

Fig. 1 ein Flu.diagramm zur Illustration des erf indungsgema- 

fien Verfahrens, 



Fig . 2 



ein FluBdiagramm des Ablaufs einer Daten- oder 
Bilderf assung, 



Fig. 3 ein FluBdiagramm des Ablaufs einer Segmentierung, 
Fig. 4 ein FluBdiagramm zur Illustration von Fuzzy-Methoden, 



Fig. 5 ein Bildbeispiel zur Illustration der Segmentierung, 

Fig. 6 ein Bildbeispiel zur Illustration der Segmentreduzie- 
rung. 

Fig 7 einen dreidimensionalen RGB-Farbraum mit acht Hy- 
perspharen und zugehorigen Cluster-Zentren, 
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Pig. 8 eine graphische Illustration einzelner Regelsatze 
einer Fuzzy-Inf erenz, und 

Fig. 9 eine Blockdarstellung einer erf indungsgemalien Vor- 
richtung . 

Pie E.findu„g wird i. folgend.n a. Bei^pi.l einea Sv^te.s .ur 
0bje.terfassun, beschri.ben, das als SehMlfe ..„,er.c te St. 
Bei anderen .nwendungen der Brfindun, warden d.e 
ver^ahrensweisen analo, i„ple.entie.t , .obei :edoch Hod. 
£izl.rung.n in Bezag au£ die Datenerfassung und d.e Ergebn.s- 
ausgabe erfolgen. 

Entsprechend der Ubersichtsd.rstellung ge.a5 Fig 1 erfaBt ein 
erfindungsgemaoes Vertahren die Schrltte Datenerfassung 20 
S g^entie/u^g 30, rarb.las.lfizierung 40 und Brgebnisau.gabe 

r or BeenLgung de= Ver£a.ren. ,Snde e„, «-igt nach . 
Ki.ssifizierungsergebnis ggf. ..itgX.i=. vor Oder " 
Ergebnisausgabe ein RUcksprung zur Datenerfassung 20 Oder Se, 
: :Lrung 30. u. ggf. .ine .o.ussierung au. ein ---- - 
3e.t Oder eine ver^nderte Seg^entierung vorzuneh^en. Na h de 

eg.entierung 30 soilte der So.ritt 3^^— '"""^ ^ 
,e!ehen sein. Die seg^entreduzierung 30a ^ " ^ ' 

die spatere Anwendung der Bntsoheidungsregeln bei der Fuzzy 
„.erLz ,Reduzierung der Rege.zahl, . steXit ^^-^ -"^J-^^ 

,endes «er.»al der Crfindung dar, Binzelheiten der Schritte 20 

bis 40 sind in den Figuren 2 bis 4 dargestellt. 

Die Datenerfassung 20 ,oder BilderEassung. u,n£.Bt ge,.a« Fig • 2 

^^i^h 91 bei dem eine Bildauf nahmeein- 
zunachst einen Systemabgleich 21, bei dem e 
• H^nnn fz B Diqitalkamera oder Scanner) zur folgenden Bild 

:::::: .;r:::eitet -.d. oer s.ste.abg.eic. 2^ u^.. b 

spielsweise bei ko^nerzieU ver£Ugbare„ Ka.eras einen uto^ati 
schen WeiMbgleioh ,Abstin™u„g au£ die »er.endete LiChtart - 
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z.B. Kunst- Oder Tageslicht, wobei beispielsw.eise der hellste 
Bildpunkt als wei. bzw. als Farbe der Lichtquelle interpretxert 
wird) Oder eine automatische Belichtungsmessung in Komb.natxon 
mit einer Verstarkungssteuerung (z.B. Abstinunung unter der Vor- 
aussetzung, dali dem hellsten Bildpunkt die grolitmoglichen Farb- 
werte zugewiesen werden) . Mit derartigen Formen des Systemab- 
gleichs ist in der Regel eine ausreichende Reproduktion der 
Farben der auf genonunenen Szene m5glich. Der Systemabgleich 21 
kann jedoch speziell angepa.te Algorithmen oder Kalibrierungen 
verwenden, um die Bildaufnahme auf konstrastarme Szenen oder 
auf Bildszenen mit extremer Beleuchtung abzustimmen. 

Beim systemabgleich 21 kann auch eine Entf ernungsmessung durch- 
gefahrt werden. Hierzu wird beispielsweise ein kamerainternes 
auf Kontrastbeziehungen basierendes Autof ocus-System oder auch 
fur Pr.zisionsmessungen eine laser-basierte Entf ernungsmessung 

verwendet . 

Nach der eigentlichen Bildaufnahme 22 zur Erstellung eines di- 
gitalen Farbbildes (Belichtungs- oder Scan-Vorgang) folgt dxe 

0-^ rlurch Bildung eines Datensatzes, der die 
Bilddatenerzeugung 23 durcn tJiJ-auuy 

Rot-, Grun- und Blauwerte (R-, B-Werte) jedes Pixels des 

digitalen Farbbildes, die jeweils diskrete Werte zwischen exnem 
.inimalen und einem maximalen Wert annehmen konnen, umfa.t. Dxe 
Bilddaten umfassen somit drei Farbebenen mit den R-, G-, B- 
Werten eines jeden Pixels. Die Pixelzahl eines mit einer Kamera 
aufgenommenen Digitalbildes betragt beispielsweise 740 • 568 
Pixel. Die Digitalisierungstiefe betr.gt z.B. 24 Bit (8 Bxt pro 
Farbkanal), was rund 16,7 Millionen Farben entspricht. Parame- 
ter der digitalen Bildverarbeitung wie beispielsweise dxe Px- 
xelzahl Oder die Digitalisierungstiefe k5nnen jedoch anwen- 
dungsabhangig variiert werden. 

Bei der Segmentierung 30 erfolgt gem.B Fig. 3 zunachst eine 
Parbtransformation 31 von den einzelnen R-, G- und B-Ebenen des 
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Farbbildes in einen an die weitere Segmentierung (s. unten) an- 
gepaBten Farbraum. Die Farbtransf ormation 31 ist anwendungsab- 
hangig ein fakultativer Schritt, der jedoch aus den folgenden 
Granden bei der Implementierung der Erfindung als Sehhilfe be- 
vorzugt realisiert wird. 

Die Betrachtung der einzelnen G- und B-Ebenen eines Farb- 

bildes zeigt^ daft der RGB-Farbraum nur beschrankt zur sprachub- 
lichen Charakterisierung von Farben und zur Bildsegmentierung 
geeignet ist. So kann beispieisweise aus den G- und B- 

Anteilen eines Objekts nur unter wohldef inierten Bedingungen 
auf die wahrgenommene Farbe ruckgeschlossen werden. Da die im 
RGB-Bild enthaltenen Inf ormationen die Objekte in Bezug auf die 
Farbe und (abgesehen von der Dimensionsreduzierung bei 2D- 
Bildern) auch Geometrie vollstandig charakterisieren, besteht 
das Ziel der Farbtransf ormation 31 darin, diese Inf ormationen 
in einen optimalen auswertbaren Parameterraum (Farbraum) zu 
iibertragen . 

Die Farbtransformation 31 der RGB-Werte kann beispieisweise ei- 
ne lineare Transformation z.B. in CIE-XYZ-Werte oder in Farb- 
werte, die den Zapf ensignalen im Auge entsprechen (LMS-Signale) 
Oder nichtlineare Transf ormationen in Farbraume umfassen, die 
der menschlichen Wahrnehmung und der ublichen farblichen Be- 
schreibung der Farbwahrnehmung besser angepaftt sind. Diese 
Farbraume umfassen beispieisweise den HSL-Raum (Farbton- 
Sattigung-Helligkeit oder Hue-Saturation-Lightness-Raum) , einen 
HSV-Raum, den CIE-L*a*b*- oder CIE~L*habC*ab -Raum, den CIE- 
L*u*v*-Raum oder dgl . Die Farbtransformation 31 kann auch in 
jungst entwickelte Farbwahrnehmungsraume (entsprechend den sog. 
"Color Appearance"-Modellen, wie das CIE-CAM '97 nach R.W.G. 
Hunt, Oder den RLAB-Raum nach M. D. Fairchild) mit Dimensionen 
wie "Brightness", "Lightness", "Colorf ullness" , "Chroma", 
"Hue", Oder "Saturation" fUhren (s. hierzu auch Mark D. 
Fairchild "Color Appearance Models", Edison-Wesley, 1998) . 
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Nach der Farbtransf ormation 31 erfolgt im Zielf arbraum eine Pa- 
rameterwahl 32, bei der eine Dimension oder ein Parameter des 
Zielfarbraumes ausgewahlt wird, der innerhalb eines Objekts 
Oder Segments nahezu konstant ist und sich an Objektgrenzen 
moglichst stark andert. Diese Parameterwahl 32 erfolgt somit 
anwendungsabhangig je nach gewahltem Zielf arbraum. 

Die Segmentierung 30 erfolgt vorzugsweise mit einer Farbtrans- 
formation 31 vom RGB-Bild in den HSV- oder L*habC*ab-Raum, wobei 
als bevorzugter Parameter der H-Wert (Farbton oder Hue-Wert) 
gewahlt wird. Der H-Wert zeigt sich innerhalb eines einfarbigen 
Objekts in einer dreidimensionalen Szene ausreichend konstant . 
Die Segmentierung erfolgt daher vorzugsweise in der Farbton- 
Ebene, in der sich die Objekte bzw. Hintergrundbereiche beson- 
ders effektiv voneinander trennen lassen. 

Im weiteren Verfahren erfolgt zunachst die Startpixelwahl 33. 
Ein bestimmtes Pixel der Szene in der Farbton-Ebene wird als 
Startpixei fur die weitere Segmentierung ausgewahlt. Eine typi- 
sche Wahi ist beispielsweise ein Pixel in der Bildmitte oder in 
einem vorher ermittelten Bereich. Dieser vorher ermittelte Be- 
reich zeichnet sich beispielsweise durch besondere Bildmerkmale 
aus/ die eine Unterscheidung eines Objekts von der jeweiligen 
Umgebung z.B. auf grand des Farbtons, des Kontrasts, der Hellig- 
keit Oder dergleichen erlauben. Die Segmentierung kann auch da- 
hingehend modifiziert sein, daB nicht ein bestimmtes Objekt 
ausgewahlt wird, sondern daJi das gesamte Bild segmentiert wird. 
Das komplette Digitalbild wird wie folgt in relevante Segmente 
eingeteilt. Das Bild wird vollstandig in ein zu bestimmendes 
Objekt (eine zusammenhangende Pixelflache) und dessen Umge- 
bungssegmente sowie eventuelle Locher segmentiert. Mittels Ge- 
wichtung der Umgebungssegmente und Locher (hier gehen die Ent- 
fernung, Grolie, Position und Kontrast usw. bezuglich des zu be- 
stimmenden Objektes ein) wird unter Verwendung von Fuzzy- 
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Control-Klassif izierungsverf ahren die wahrgenonunene Farbe be- 
rechnet. Anschlieftend erfolgt ggf. die Bewertung und Klassifi- 
zierung jedes weiteren Segments in Bezug auf alle anderen Seg- 
mente z.B. mit dem Fuzzy-Control-Verf ahren, wie es unten erlau- 
tert wird. 

Beim nachf olgenden Segmentwachstum 34 werden zuerst die an das 
Startpixel angrenzenden Pixel erfaftt, deren H-Wert eine Diffe- 
renz vom H-Wert des Startpixels zeigt, die kleiner als ein vor- 
bestimmter Schwellwert ist. Anschlieliend werden die angrenzen- 
den Pixel der beim ersten Schwellwertvergleichsschritt ermit- 
telten Nachbarpixel des Startpixels untersucht, ob der H-Wert 
innerhalb eines vorbestimmten H-Intervalls urn den H-Wert des 
Startpixels liegen. Durch diese Schwellwertvergleichsschritte 
erfolgt ausgehend vom Startpixel das Wachstum einer Pixelgruppe 
bis an die Grenzen des entsprechenden Objekts, in dessen Abbil- 
dungsbereich der Startpixel liegt, da an den Grenzen die H- 
Werte starker als die zugelassene Toieranz (H-Intervall) veran- 
derlich sind. 

Es wurde f estgestellt , daft die beim Segmentwachstum 34 ausge- 
wahlten Bereiche in der Regel gut mit Grenzen oder Segmentgren- 
zen des Hintergrundes ubereinstimmen . AuBerdem hat sich ge- 
zeigt, dafi bei diesem Segmentwachstum Reflexe der Lichtquelle 
(haufig weifi) nicht mit ausgewahlt oder segmentiert werden, 
selbst wenn sie innerhalb des betrachteten Objektes liegen. 
Dies ist ein besonderer Vorteil des erf indungsgemafiien Verfah- 
rens, da sich die Klassif izierung der Farbwahrnehmung unabhan- 
gig von Reflexen in vielen Fallen als vorteilhaft erweist, da 
sich Reflexe nachteilig auf die Mi ttelwertbildung bzw. Integra- 
tion ilber die Objektflache auswirken. Es ergeben sich zwar Ein- 
schrankungen bei der Ausgabe der Objektausdehnung, die bei 
praktischen Anwendungen als Sehhilfe jedoch in der Regel von 
geringer Bedeutung sind, was im Einzelfall vom Bildinhalt ab- 
hangen kann. 
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Bei der folgenden Beurteilung 35 wird das ermittelte Segment 
Oder Objekt in Bezug auf seine geometrischen Eigenschaf ten be- 
wertet. Falls ein ausgewahltes Objekt bestimmten Randbedingun- 
gen nicht genugt, die zuvor festgelegt werden, z. B. wenn der 
gesamte Bildinhait oder nur ein Pixel ausgewahlt ist, so be- 
steht die Moglichkeit eines Rucksprungs zur Parameterwahl 32 
und/oder zur Startpixelwahl 33. Diese Schritte konnen mit dem 
Segmentierungswachstum 34 und einer Beurteilung 35 so oft wie- 
derholt werden, bis ein ausreichend bestimmtes Ergebnis vor- 
liegt. AnschlieBend erfolgt eine Grenzermittlung 36. Dabei wird 
die auftere bzw. innere Umrandung des gewachsenen Objekts als 
Datensatz ermitteit. Die Objektsegmentierung umfaBt somit die 
Ermittlung aller Bildpunkte innerhalb der Umrandung. 

Figur 5 zeigt beispielhaft eine bei Abbildung einer Ampel 50 
(in der Originalvorlage : rote Farbe des Ampelmannchens) ermit- 
telte Grenze 51 des durch die Figur gebildeten Bereiches glei- 
chen Farbtons. 

Das hier vorgestelite Segmentierungsverf ahren eignet sich vor- 
teilhaf terweise auch fiir die zweidimensionalen Bilder von rea- 
len komplexen Szenen mit dreidimensionalen Objekten. Falls die 
betrachteten Szenen in der Farb- tonebene keine Inf ormationen 
uber die Objektgrenzen liefern, so mussen Inf ormationen aus an- 
deren Ebenen des jeweiligen Farbraumes oder sogar aus anderen 
Farbraumen hinzugezogen werden. Hierzu ist beispielsweise ein 
Rucksprung vom Beurteilungsschri tt 35 zur Farbtransf ormation 31 
implementierbar . 

Die Objektsegmentierung gemali Fig. 3 ist kein zwingendes Merk- 
mal des erf indungsgemaBen Verfahrens. Anwendungsabhangig kann 
die Segmentierung vollstandig unterlassen oder durch einen an- 
deren Segmentierungsvorgang ersetzt werden, bei dem Objekte und 
Segmentgrenzen nicht aufgrund der Farbe sondern mit anderen 
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Merkmalen erkannt werden (z.B. Segmentierung durch Beobachtung 
zeitabhangiger Positionsanderungen von Objekten oder der Kamera 
Oder durch Verwendung von Kanten-Detekt ionsaigorithmen (z. B. 
Gradientenverf ahren) ) . Bei der Segmentierung konnten dann auch 
Angaben uber die Objektgeschwindigkeit , Bewegungsrichtung, Be- 
schleunigung und dergieichen als Ergebnis geliefert werden. 
Nach der Grenzermittlung 36 erfolgt fakultativ die Segraentredu- 
zierung 30a (siehe auch Figur 1) . Bei der Segmentreduzierung 
30a werden die innerhalb der Umrandung ermittelten, zum Segment 
gehorigen Bildpunkte durch eine groBere Bildpunktmenge ersetzt, 
die die zum Segment gehorigen Bildpunkte und weitere Bildpunkte 
zur Bildung einer vereinf achten Segmentf lache umfaJit. Bei- 
spielsweise wird im Rahmen der Segmentreduzierung 30a das in 
Figur 6 illustrierte, zunachst ermittelte unregelmaliige Bild- 
segment 61 durch das reduzierte Bildsegment 62 ersetzt. Das re- 
duzierte Bildsegment 62 ist beispielsweise, wie dargestellt, 
ein Rechteck mit Seitenlangen, die den maximalen Ausdehnungen 
des ursprunglichen Bildsegments in zwei zu einer senkrecht ste- 
henden Richtungen entsprechen. Alternativ kann z.B. auch ein 
reduziertes Bildsegment 63 in Form einer Ellipse gebildet wer- 
den. Nach Ermittlung aller zum reduzierten Bildsegment gehori- 
gen Bildpunkte wird dem reduzierten Bildsegment ein mittlerer 
Farbwert zugeordnet, der dem Mittelwert uber samtliche Farbwer- 
te im ursprunglich segmentierten Bereich entspricht. 

Im folgenden wird die Klassif izierung 40 der Objektfarbe (s. 
Fig. 1) unter Bezugnahme auf das FluBdiagramm gemaB Fig. 4 und 
die Darstellung der Cluster-Zentren im RGB-Farbraum gemSB Fig. 
6 erlautert. Zur Farbklassif izierung werden Methoden der Fuzzy- 
Logik verwendet. Hierzu zahlen insbesondere die im folgenden 
als Fuzzy-Clustering bezeichnete einfache Cluster-Zuordnung und 
die im folgenden Fuzzy-Control bezeichnete komplexere Cluster- 
Zuordnung . 
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Ausgangspunkt der Klassif izierung ist das Fuzzy-Clustering. Die 
Kombination mit Fuzzy-Control Oder die iterative^ wiederholte 
Abarbeitung beider Ver f ahrensweisen (zur Erzeugung von Unter- 
klassen ubergeordneter Hauptklassen) sind fakultativ zur Ver- 
besserung des Verfahrens realisierbar . GemaB einer Ausfiihrungs- 
form der Erfindung ist jedoch auch FuzzyrControl, das genauere 
Farbwahrnehmungsangaben ermoglicht, alleine und ohne das vorhe- 
rige Fuzzy-Clustering implementiert , was zwar schnelier Farb- 
wahrnehmungsangaben ermoglicht^ dies jedoch mit einer groberen 
Einteilung. 

Beim Fuzzy-Clustering werden vorbestinunte Bezugs-Farbraume in 
unscharfe HypersphSren eingeteilt, in deren Zentren jeweils die 
wichtigsten Reprasentanten einer Wahrnehmungsklasse liegen. 
Dies bezieht sich beispielsweise auf Farbton-^ Helligkeits- 
oder Sattigungsklassen oder auf die von Berlin und Kay ermit- 
telten elf Farbklassen beziiglich der Benennung von Farben. Ei- 
nem segmentierten Objekt wird dann ein Farbmerkmal durch dessen 
Lage in Bezug auf die Hyperspharen bzw. die Cluster-Zentren zu- 
geordnet. Bei der Fuzzy-Control-Klassif izierung erfolgt diese 
Zuordnung zusatzlich unter Beriicksichtigung von weiteren, kom- 
plexen Merkmalen der Szene, wie z.B. den Farbwerten von Umge- 
bungsobj ekten, Kontrastbeziehungen zu anderen Biidsegmenten, 
Abhangigkeiten von der Beleuchtung und dgl . Die mathematischen 
Grundlagen zu den Verfahren Fuzzy-Clustering und Fuzzy-Control 
sind an sich bekannt und werden beispielsweise in den Buchern 
von H. Kiendl ("Fuzzy Control methodenorientiert " , Oldenbourg 
Verlag, 1997), H.R. Tizhoosh ("Fuzzy Bildverarbeitung, Einfuh- 
rung in Theorie und Praxis"), Springer Verlag, 1998, und L.A. 
Zadeh ("Fuzzy sets", in: "Information and Control" 8, 1965, 
338-353) beschrieben . 

Zusatzlich zu Fuzzy-Clustering und Fuzzy-Control konnen erfin- 
dungsgemaB sogenannte neuronale Fuzzy-Systeme implementiert 
werden, die lernfahig sind und nach entsprechenden Trainings- 
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vorgangen Bildszenen verarbeiten konnen, die nicht vorher ge- 
lernte Bilddatensatze beinhalten. Der besondere Vorteil der 
Fuzzy-Control-Klassif izierung besteht darin, daJi anwendungsab- 
hangig eine beliebige Genauigkeit allein durch die Anzahl der 
berucksichtigten Regeln erzielt werden kann, ohne den bereits 
erzielten Prazisionsgrad zu verringern. Die Fuzzy-Control- 
Klassif izierung erlaubt beliebig viele Fallunterscheidungen un- 
ter Verwendung der unten erlauterten "WENN-DANN-Regeln" . Aufier- 
dem erlauben Fuzzy^Control-Verf ahren eine Simulation des visu- 
ellen Wahrnehmungsprozesses analog zum Gehirn, wobei die Verar- 
beitung in verschiedenen Stufen erfolgt, die im Gehirn der Re- 
tina, den sogenannten seitlichen Kniehockern, dem primar visu- 
ellen Cortex, hoheren Cortex-Ebenen, mit Modulen fur Form, Far- 
be und Bewegung und dgl . zugeordnet werden konnen, Zwischen 
diesen Strukturen bzw. beim Fuzzy-Control-Verf ahren zwischen 
den Merkmalsdimensionen besteht ein standiger Inf ormationsaus- 
tausch mit Zugriffen und Ruckkopplungen zu den verschiedenen 
Verarbeitungs stufen. 

GemaB Fig. 4 wird beim Fuzzy-Clustering 41 wie folgt vorgegan- 
gen. Nachdem wie oben beschrieben zur Segmentierung des digita- 
len Bildes einer Videokamera unter Verwendung der Farbtonebene 
die Flache um einen Startpixel in Richtung aller angrenzenden 
Pixel ausgedehnt wird, bis ein vorbestimmter Farbtondif f erenz- 
Schwellwert uberschritten ist, und damit ein bestimmter, einem 
Objekt Oder Segment zugeordneter Bildbereich festgelegt ist, 
werden die Biidpunkte dieses segmentierten und ggf. reduzierten 
Bildbereiches im RGB-Raum betrachtet. Bei der RGB-Mittlung 42 
werden alle zum Bildbereich gehorenden RGB-Werte gemittelt und 
zu einem Tripel aus RGB-Werten zusamraengef afit . Dieses Tripel 
mittlerer RGB-Werte besitzt eine bestimmte Position im RGB- 
Farbraum, der wie folgt in acht Objektf arbklassen (Hyperspharen 
eingeteilt ist) . 
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Fig. 7 zeigt beispielhaft den RGB-Farbraum mit den acht Objekt- 
farbklassen Schwarz, Wei/3, Rot, Grun, Gelb, Blau, Cyan und Vio- 
lett. Die Cluster-Zent ren finden sich an den Ecken eines Wur- 
fels (RGB-Wiirfel) . Bei dem in Fig. 7 gezeigten RGB-Wurfel ge- 
hort z.B. das RGB-Tripel mit den Werten (0/0/0) zu 100 % zur 
Farbklasse "Schwarz". Dementsprechend wird ein Zugehorigkeits- 
wert ermittelt, der die Zugehorigkeit eines bestimmten Tripels 
zu einer Farbklasse mit einer %-Angabe beschreibt. Der Zugeho- 
rigkeitswert \i fur das Tripel (0/0/0) betrSgt beispielsweise 
fur die Kiasse "Schwarz" p=l und fur alle anderen Farbklassen 
\i=0. Die Zugehorigkeitswerte ]i warden beim Fuzzy-Clustering un- 
ter der Nebenbedingung ermittelt, daB sich die Zugehorigkeits- 
werte eines Tripels in Bezug auf alle Farbklassen zu 1 addie- 
ren. Die Berucksichtigung einer solchen Nebenbedingung ist je- 
doch nicht zwingend erf orderlich . Die Zugehorigkeitswerte p 
werden beispielsweise nach dem sogenannten "Fuzzy-c-Means"- 
Algorithmus (FCM) berechnet, der eine unscharfe Klassif izierung 
erlaubt (s. R-H. Tizhoosh in "Fuzzy-Bildverarbeitung . Einfuh- 
rung in Theorie und Praxis", Springer Verlag 1998, S. 106 ff.). 
Bei der Cluster-Ermittlung am RGB-Warfel werden beispielsweise 
folgende relevante Parameter vorgegeben: 

- Anzahl der Klassen: 8 

(Schwarz, Weili, Rot, Grun, Blau, Gelb, Cyan, Violett) 

Alternativ ist eine Entwicklung auf elf Farbklassen (gegebenen- 
falls unter Berucksichtigung des Umfeldes mit Fuzzy-Control- 
Klassif izierung) moglich (Schwarz, WeiB, Rot, Grun, Blau, Gelb, 
Violett, Rosa, Orange, Braun, Grau) . 

- Anzahl der Merkmale der einzelnen Objekte: 3 
(R-, G-, B-Werte) 

- Wichtungsexponent (MaB fur die Unscharfe) : 2 

- Initialisierungsmatrix: Einheitsmatrix 

- Abbruchsschwelle: 0.001 
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Die Nebenbedingung, dafi die Summe aller Zugehorigkeitsgrade p=l 
ist, kann bei Modif izierung des Fuzzy-Clustering-Verf ahrens 
(z.B. Ansatz nach dem "Possiblistic c-Means"-Verf ahren) fallen- 
gelassen werden. 

Das FCM-Verfahren ist auf kugelf ormige Hyperspharen beschrankt. 
Es konnen alternativ andere Fuzzy-Clustering-Verf ahren vorgese- 
hen sein, deren Spharen kompliziertere Formen umfassen. Dies 
ist von Vorteil, da die menschliche Farbwahrnehmung nicht voll- 
standig mit kugelf ormigen Hyperspharen beschrieben werden kann. 
Eine weitere Verbesserung der Farbwahrnehmungsangabe wird durch 
die Implementierung der Fuzzy-Control-Klassif izierung (s.u.) 
erreicht . 

Nach der RGB-Mittlung 42 erfolgt somit die Ermittlung der Zuge- 
horigkeitswerte p (43). Ein RGB-Tripel kann beispielsweise fur 
ein konkretes Objekt die folgenden Zugehorigkeitswerte besit- 
zen: Schwarz: 0,1, Weift: 0,2, Rot: 0,5, Grun: 0,0, Gelb: 0,1, 
Blau: 0,0, Cyan: 0,0, Violett: 0,1. 

Im weiteren Verfahren erfolgt die Ermittlung des maximalen Zu- 
gehorigkeitswertes p^ax (44). Gemaft einer ersten Ausf uhrungsf orm 
der Erfindung wird als Ergebnis fur die Objektfarbe des segmen- 
tierten Objekts der Name der Farbklasse mit dem groBten Zugeho- 
rigkeitswert Pmax angegeben. Dies ist beim e.g. Beispiel der Zu- 
gehorigkeitswert p = 0,5, so daB sich die Objektfarbe "Rot" er- 
gibt. Dieses Ergebnis wird dann mit der Datenausgabe 45a zur 
weiteren Verarbeitung vorbereitet. Alternativ kann vorgesehen 
sein, dafi) zusatziich die Farbklasse mit dem zweitgrbftten Zuge- 
horigkeitsgrad p ausgeben wird, falls die Differenz zwischen 
dem ersten (groBten) und zweiten (zweitgroBten) Zugehorigkeits- 
grad kleiner als ein vorbestimmter Schwellwert ist. Die Ergeb- 
nisausgabe wurde dann beispielsweise lauten "Rot-Weili". 
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GemaB einer zweiten Ausf uhrungsf orm der Erfindung schlieftt sich 
an das Fuzzy-Clustering die weitere Klassif izierung durch Fuz- 
zy-Control 46 an, wie es unten im einzelnen erlautert wird. Die 
hier beschriebene Klassen- oder Clusterzuordnung erfolgt unter 
dem beispielhaf ten Bezug auf den RGB-Raum. Die Wahl des zum 
Fuzzy-Clustering herangezogenen Farbraumes ist anwendungsabhan- 
gig modif izierbar . Entsprechendes gilt fur die genaue Lage der 
Cluster-Zentren (Zentren der Hyperspharen oder Farbklassen) im 
Farbraum. Es ist vorzugsweise vorgesehen, die Lage der Cluster- 
Zentren auf der Grundlage von Expertenwissen vorzugeben oder 
anhand von Beispielen zu bestimmen, Ferner muli die exakte Form 
der Hyperspharen im Farbraum anwendungsabhangig gewahlt werden. 
Es ist moglich, durch Hinzunahme weiterer Dimensionen bzw. 
durch Verschieben der Cluster-Zentren und durch Verwendung ver- 
schiedener Clusteralgorithmen im Raum der Hyperspharen eine An- 
passung des Fuzzy-Clustering an die konkrete Wahrnehmungsanwen- 
dung vorzunehmen. Dabei kann auch iterativ anhand von Bezugsob- 
jekten mit definierten Farben vorgegangen werden. Die Zahl der 
Hyperspharen laBt sich gegenuber dem Beispielwert 8 erhohen 
Oder erniedrigen. 

Bei der folgenden Fuzzy-Control-Klassif izierung 46 werden wie 
beim Fuzzy-Clustering 41 die Farbwerte des auswahlten oder seg- 
mentierten Objekts betrachret. Im Rahman der Schritte 47a, 47b, 
47c ... werden Zusa t zparameter ermittelt, die bei der spateren 
Regeiung oder Zuordnung von Farb-Clustern beriicksichtigt werden 
sollen. Zu diesen Zusatzparametern zahlen beispielsweise die 
Umgebungsf arben {47a) (hierzu wird das gesamte Bild segmen- 
tiert), die Beieuchtung (47b), Positionsparameter (47c), zu- 
satzliches Expertenwissen (47d) und dgl. Zu den Beleuchtungspa- 
rametern (47b) zahlen beispielsweise die Beleuchtungsart (Spot- 
beleuchtung, homogene Beieuchtung, mehrere Lichtquellen o. 
dgl.), Farbwerte der Beieuchtung und die Beleuchtungsrichtung . 
Die Positionsparameter konnen sich auf die geometrische Anord- 
nung der Objekte oder Abstandsinf ormationen oder dgl. beziehen. 
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Das zusatzliche Expertenwissen kann beispielsweise aus der Ver- 
teilung der Farbwerte extrahiert oder uber zusatzliche Gerate 
erfaftt werden und betrifft z.B. Oberf lacheneigenschaf ten der 
betrachteten Objekt (Rauheit, Glanz) oder dgl . . Nach der Er- 
mittlung der Zusatzparameter (47) folgt die eigentliche Rege- 
lung/ Klassif izierung des Fuzzy-Control. Bei der Fuzzy-Inf erenz 
48 werden die gewunschten Farbmerkmale eines segmentierten Ob- 
jekts mit Hilfe von "WENN-DANN"-Regeln (Entscheidungsregeln) 
eines Fuzzy-Reglers berechnet. 

Die Implementierung der "WENN-DANN-Regeln" erfolgt beispiels- 
weise gemafi folgendem Schema (sog. Fuzzy-Inf erenz) : 

WENN Farbwerte des ausgewahlten Objektes = (X1/X2/X3) 

und Kontrastbeziehungen zum Umfeld = . . . 

(z.B. Farbwerte des ersten angrenzenden Objektes = 

(yi/y2/y3) 

und Werte der Beleuchtung = ... 

und 

DANN wird das ausgewShlte Objekt mit der Farbwahrnehmung 

(z.B. Blau, Hell, gesattigt usw.) wahrgenommen und 
besitzt das Objekt einen Abstand von x Metern und 
ist y Zentimeter hoch und z breit, usw. 

Entscheidungsregeln, die ausschlieBlich auf die L,a,b-Werte des 
Objektes (Center) und seines Umfeldes bezogen sind, konnen bei- 
spielsweise diese Form besitzen (zur Erlauterung des Term- 
Begriffes siehe unten) : 



WENN 


L 


-Umfeld 


= Term 


1 


und 


a 


-Umfeld 


= Term 


2 


und 


b 


-Umfeld 


= Term 
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und 


L 
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und 
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und b-Center = Term 8 

Dann Weiss = Term 1 

Bei derartigen Schemata konnen alle Inf ormationen bekannter 
Wahrnehmungsmodelie und auch zeitliche Objektanderungen beruck- 
sichtigt werden. 

Zur Ermittlung des Expertenwissens bzw. der Entscheidungsregeln 
(Schritt 47d) konnen Testreihen mit normalsichtigen Ver- 
suchspersonen durchgefuhrt werden. Das Expertenwissen kann in 
Form von Fuzzy-Regeln (ggf . iterativ) zur Verwendung in der 
Fuzzy-Inf erenz 48 implementiert werden, Im folgenden wird die 
Fuzzy-Inferenz 48 mit einer Vielzahl von Entscheidungsregeln 
auf der Grundlage der zuvor bestimmten Objekt- und Umgebungs- 
farben (Schritt 47a) im einzelnen erlautert. Dabei wird von ei- 
ner Bildauswertung mit Segmentierung und Segmentreduzierung und 
direkter Anwendung des Fuzzy-Control-Verf ahrens (ohne das 
Fuzzy-Clustering-Verf ahren) ausgegangen . 

Bei der Fuzzy-Inferenz 48 werden die vorab ermittelten (gemes- 
senen) Farbparameterwerte des reduzierten Segments (zum Bei- 
spiel Segment 62 in Figur 6) und des Umfeldes (siehe Bezugszei- 
chen 64 in Figur 6) mit einer Vielzahl vorab ermittelter und 
gespeicherter Entscheidungsregeln ausgewertet. Die Entschei- 
dungsregeln bilden einen Regelsatz, der wie folgt durch Ver- 
suchsreihen mit menschlichen Beobachtern erzeugt worden ist. 

Die Ermittlung der Entscheidungsregeln erfolgt durch Versuchs- 
reihen, bei denen Versuchspersonen auf einem Monitor syntheti- 
sche Farbbilder mit einem mittleren Segment (z. B. 62 in Figur 
6) und einem Umfeld (64 in Fig. 6) mit verschiedenen Farbmerk- 
malen ( voreingestellte Farbparameterwerte, z. B. L,a,b-Werte) 
betrachten und jeweils die subjektive Farbwahrnehmung angeben. 
Die Farbmerkmale des Bildes und die Angabe der Versuchsperson 
werden als EingangsgroBen bzw. Ausgangsgroften auf der Basis so- 
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genannter Eingangs- bzw. Ausgangs-Terme fur die Entscheidungs- 
regeln verwendet. Ein Eingangs-Term ist eine Fuzzy-Menge, deren 
Elemente aus Farbparameterwerten und Zugehorigkeitswerten be- 
steheri/ die jeweils die Zugehorigkeit der Farbparameterwerte 
zum Term charakterisieren . Ein Ausgangs-Term ist eine Fuzzy- 
Menge, deren Elemente Farbwahrnehmungswerte (z.B. Rotanteil 
in %) und entsprechende Zugehorigkeitswerte in Bezug auf den 
Term umfassen. 

Eine Gruppe von Entscheidungsregeln ist in Figur 8 iliustriert. 
Figur 8 zeigt eine graphische Darstellung der Zuordnung von 
AusgangsgroBen entsprechend den in der rechten Spalte angegebe- 
nen Farbwahrnehmungen zu bestimmten Kombinationen von Eingangs- 
grolien- Die Eingangsgrofien sind fur das Segment in der Mitte 
(Center) fur den L-Wert der Term 4 und fur die a- ( Abszisse) - 
Werte ein Term zwischen Term 4 und Term 9 und fur die b- 
Ordinate-Werte ein Wert zwischen Term 4 und Term 8, Fur das Um- 
feld gelten als EingangsgroBen fur a: Term 5, fur b: Term 7 und 
fur L: Term 3. Je nach Einstellung der a- und b-Werte des Seg- 
ments gibt mindestens eine Versuchsperson ihre Farbwahrnehmung 
an. Beispielsweise wird fur a = 6 und b = 7 fur das Segment in 
der Mitte „braun"' wahrgenommen, wahrend sich fur a = 9 und b = 
4 eine Farbwahrnehmung „rosa'' ergibt. Nach diesem Schema werden 
sMmtliche, fur eine konkrete Anwendung in Frage kommenden Ein- 
gangs-Term-Kombinationen (Reizkombination ) fur Versuchszwecke 
am Monitor dargestellt und die entsprechenden Entscheidungsre- 
geln als Implikationen entsprechend dem obigen Schema aufgenom- 
men und gespeichert. Jede vorgegebene Reizkombination fuhrt fur 
jede Farbwahrnehmungsklasse zu jeweils einer neuen Entschei- 
dungsregel. Beim dargestellten Beispiel ergeben sich fur jede 
Reizkombination 11 Entscheidungsregeln, deren Konklusionen fur 
die wahrgenommene Farbwahrnehmungsklasse beispielsweise (Aus- 
gangs-)Term 1 und fur alle nicht wahrgenoramenen Farbwahrneh- 
mungsklassen (Ausgangs- ) Term 0 lauten. Entsprechendes ist auch 
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fur andere Bildmerkmaie (Kontrastbeziehungen pder dergieichen) 
moglich. 

Ein fur eine zuverlassige Farberkennung ausreichender Regelsatz 
kann rund 10.000 bis 100.000 oder auch mehr einzelne Entschei- 
dungsregein umfassen, die hier jedoch nicht im einzeinen aufge- 
fiihrt werden konnen. Jede Entscheidungsregel ist entsprechend 
dem oben genannten Schema gebildet und umfafit im einfachsten 
Fall eine Implikation mit zwei UND-verknupf ten EingangsgroBen . 
Die EingangsgroBen umfassen beispielsweise die Farbmerkmale des 
(reduzierten) Segments und des Umfeldes mit den a- und b- 

Variablen im oben genannten L*a*b*-Farbraum. Dabei konnen die 
Helligkeits- (L) bzw. Farb- (a-, b-) Merkmale durch Fuzzy- 
Mengen (Zugehorigkeitsverteilungen, Eingangs-Terme) beschrieben 
werden. 

Im Rahman der Fuzzy-lnf erenz 48 erfolgt nach der Messung (ggf . 
mit Klassif izierung) der Farbmerkmale ( Farbparameterwerte) des 
Segments und des Umfeldes zunachst eine Eingangs-Term- 
Zuordnung. Der Wertebereich jedes Farbparameterwertes wird 
durch eine Gruppe von Eingangs-Termen uberdeckt, die sich zu~ 
mindest teilweise uberlappen konnen. Die Zugehorigkeitsf unktio- 
nen der jeweiiigen Eingangs-Terme besitzen beispielsweise die 
Gestalt einer Dreiecksf unktion . Fur einen konkret gemessenen 
Farbparameterwert ergeben sich bei einfach uberlappenden Termen 
zwei verschiedene Zugehorigkeitswerte zu zwei benachbarten Ein- 
gangs-Termen. 

Es wird beispielsweise ein Farbbild mit einem mittig angeordne- 
ten Segment und einem farbigen Umfeld betrachtet. Fur die L- 
EingangsgroBen werden sechs Eingangs-Terme und fur die a- und 
b-EingangsgroBen jeweils elf Eingangs-Terme (Fuzzy-Mengen) ver- 
wendet. Das Ziel der Fuzzy-lnf erenz 48 besteht nun darin, dem 
Segment einen Zugehorigkeitswert zu einer bestimmten (Farb-) 
wahrnehmungsklasse entsprechend der menschlichen Farbwahrneh- 
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mung zuzuordnen. Diese Farbwahrnehmungsklasse wird unter Anwen- 
dung der unten erlauterten Operatoren aus elf moglichen Aus- 
gangsgroBen ausgewahlt, fur die jeweils zwei Ausgangs-Terme 
verwendet werden. Die Zahl der verwendeten Terme kann anwen- 
dungsabhangig verandert werden. 

Bei einem einfachen Segment-Umf eld-Reiz werden insgesamt sechs 
Eingangsgrolien (drei Merkmale fiir das Segment und drei Merkmale 
fur das Umfeld) ausgewertet. Beim folgenden Beispiel werden je- 
doch aus Obersichtiichkeitsgrunden nur zwei Eingangsgroften (a, 
b) und eine Ausgangsgrolie („weiss'') betrachtet. Eine Entschei- 
dungsregel soil z.B. heiBen: 

„WENN a = Term 1 und b = Term 2, DAMN „weiss'' = Term 
Der a-Wert (z.B.: 20) hat die Zugehorigkeit p (a = 20) = 0.5 
zum Eingangs-Term 1, wahrend der b-Wert (z.B.: 10) eine Zugeh5- 
rigkeit p (b = 10) =0.3 zum Eingangs-Term 2 besitzt. Bei die- 
sem Beispiel werden die Zugehorigkeiten zu weiteren Termen der 
Einfachheit halber nicht betrachtet. 

Zur Auswertung der Entscheidungsregel erfolgt zunachst ein Ag- 
gregationsschritt auf der Basis eines Minimum-Operators. Das 
^und" wird als Minimum interpretiert , das bei der beispielhaft 
angegebenen Entscheidungsregel mit Min (0.5 und 0.3) =0.3 ge- 
geben ist. Das Ergebnis des Aggregationsschrittes ist somit ei- 
ne reine Zahl. 

Es schlieftt sich der Implikationsschri tt an, der wiederum auf 
der Basis eines Minimum-Operators erfolgt. Die AusgangsgroBe 
,,weiss" hat zwei uberlappende Fuzzy-Mengen (Ausgangs-Term 0 und 
1) . Der Minimum-Operator bildet aus den Elementen des Termes 0 
und dem Erf iillungsgrad der Regelpramisse (0.3) jeweils das Mi- 
nimum (anschaulich bedeutet dies, daB der Term 0 auf der Hohe 
0.3 abgeschnitten wird). Das Ergebnis dieses Schrittes ist eine 
Fuzzy-Menge, die insbesondere ein Element einer Farbwahrneh- 
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mungs-AusgangsgroBe und einen Zugehorigkeitswert entsprechend 
dem Minimum-Operator des Implikationsschrittes umfaftt, 

Auf diese Weise (Aggregations- und Implikationsschritte) werden 
samtliche Entscheidungsregeln durchgearbeitet , so daB sich eine 
Vielzahl von Fuzzy-Mengen entsprechend der Anzahl von Entschei- 
dungsregeln ergeben. Im weiteren Verlauf der Fuzzy-Inf erenz 48 
werden diese Fuzzy-Mengen noch weiterverrechnet . 

Hierzu erfolgt zunachst ein Akkumulationsschritt mit einem Ma- 
ximum-Operator. Bei diesem Schritt wird aus alien Fuzzy-Mengen, 
die aus den Implikationsschritten gefolgt sind, eine neue Ver- 
einigungsmenge gebildet, in dem das Maximum der Einzelmengen 
verwendet wird. Das Ergebnis ist wiederum eine Fuzzy-Menge. 

Schliefilich folgt zur Ermittlung eines zahlenmaliigen Ergebnis- 
ses^ z.B, eines Zugehorigkeitsgrades zwischen 0 und 1 fur die 
Ausgangsgrofte ,,weiss'' ein Def uzzyf izierungs-Schritt, bei dem 
nach der Schwerpunktmethode der Schwerpunkt der resultierenden 
Fuzzy-Menge gebildet wird. Die Schwerpunktmethode wird bei- 
spielsweise von H. R. Tizhoosh et al. (siehe oben) beschrieben. 

Zur Ergebnisausgabe wird die AusgangsgroBe mit dem groBten Zu- 
gehorigkeitsgrad als Ergebnis angegeben, z.B. „grun'\ Falls die 
Zugehbrigkeitsgrade nahe beieinander liegen, kann auch vorgese- 
hen sein, daB als AusgangsgroBe zwei Farbwert mit dem groBten 
und dem zweitgroBten Zugehorigkei tsgrad angegeben werden, z.B. 
„grun-gelb'' . Das Ergebnis der Fuzzy-Inf erenz 48 wird bei der 
Datenausgabe 45b zur weiteren Verarbeitung vorbereitet. 

Es konnen auch andere Operatoren und Def uzzyf izierungsmethoden 
verwendet werden. Die Regelsatze mussen dann ggf- entsprechend 
angepaBt werden. Die beschriebene Methode besitzt jedoch den 
Vorteil einer hohen Robustheit und Leistungsf ahigkeit . Die ver- 
wendete Fuzzy-Inf erenz ist die sogenannte Mamdani-Inf erenz . Er- 
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f insungsgemafi konnen auch mit anderen Fuzzy-Inf erenzen unci De- 
f uzzyf izierungsmethoden Farbwahrnehmungen simuliert werden. 

Der in Fig. 4 angegebene Schritt 49 bezeichnet eine weitere Mo- 
difizierung des erf indungsgemaBen Verfahrens durch die Kombina- 
tion der Fuzzy-Methoden mit neuronalen Netzwerken (neuronale 
Fuzzy-Systeme) , wodurch eine Lernf ahigkeit des Systems erzielt 
wird. Es kann vorgesehen sein^ daB das neuronale Netz zusatz- 
lich unmittelbar nach der Datenerf assung (Bilderf assung) oder 
nach der Segmentierung eingebaut wird, urn gelernte und nicht 
gelernte Biddatensatze unterscheiden zu konnen. 

Die Ergebnisausgabe 45b bzw. 50 (s. Fig. 1) erfoigt anwendungs- 
abhangig in Datenform, als Anzeige oder als Ansage, oder mit 
mechanischen, durch den Nutzer fuhlbaren Mitteln. Im medizini- 
schen Bereich erfoigt vorzugsweise der Einsatz eines Text- 
Sprach-Konverters, urn die ermittelte Farbwahrnehmung mit einem 
Kopfhorer oder Lautsprecher horbar zu machen, so daft die be- 
troffene Person Inf ormationen uber die Farbe, Grofie, Position 
und/oder Entfernung der im Gesichtsfeld befindlichen Objekte 
erhalt. Die Benennung von Farben erfoigt vorzugsweise zu Klas- 
sen von Farbnamen, die in den meisten Kulturen verwendet werden 
und z.B. von B. Berlin, P. Kay et al. ("Basic Color Terms.: 
Their Universality and Evolution", Berkeley, CA; University of 
California Press) und I.C. McManus ( "Half -a-Million Basic Color 
Words - Berlin and Kay and the Usage of Color Words in Litera- 
ture and Science", Perception 1997, VL 26(N3), 367-370) be- 
schrieben sind. Die Ergebnisausgabe kann auch mit einer mecha- 
nische wirksamen Orientierungshilf e implementiert werden, wie 
sie in "Bild der Wissenschaf t" (8/1998, S. 10) beschrieben ist. 

Eine erf indungsgemaBe Vorrichtung umfaBt gemafi der in Fig. 9 
dargestellten Ausf uhrungsform eine Datenauf nahmeeinrichtung 1 
(z.B. Kamera, Scanner oder spektroskopische Anordnung) , eine 
Datenerfassungs-Einheit 2, in der das RGB-Bild bestimmt wird, 
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eine Transformations- und Recheneinheit 3, in der die Transfor- 
mation des RGB-Bildes in einem geeigneten Zielfarbraum erfolgt^ 
eine Segmentierungs-Einheit 4 zur Ermittlung des Bildbereiches, 
fur den nachfolgend in der Fuzzy-Einheit 5 die Farbwahrnehmung 
ermittelt werden soli. Zur Ergebnisausgabe ist die Fuzzy- 
Einheit mit einer Datenausgabe 6 (z.B. in Form eines Displays, 
Druckers und/oder Audiogerates ) verbunden. Die Komponenten 2, 
3, 4 und 5 der erf indungsgemafien Vorrichtung sind vorzugsweise 
in einen als Mikrocomputer integriert ausgefuhrt. Die Transfor- 
mations- und Recheneinheit 3 ist bei technischen-industriellen 
Anwendungen vorzugsweise mit einer Anzeigeeinheit 3a verbunden, 
die zur Darstellung des Bildes der auf genommenen Szene in der 
Farbtonebene eingerichtet ist. Die Anzeigeeinheit 3a ist entwe- 
der ein Zusatzmonitor oder in die Ausgabeeinheit 6 integriert. 

Das erf indungsgemafte Farbwahrnehmungssystem kann wie folgt mo- 
difiziert werden. Es kann vorgesehen sein, beim Fuzzy-Control 
die einzeinen Pixel nicht als Tripel, sondern allgemein als 
Merkmalsvektoren zu betrachten, die neben den drei Farbparame- 
tern weitere, hohere Dimensionen, wie z.B. Wahrnehmungsparame- 
ter (z.B. Glanz, Oberf lacheneigenschaf ten und dgl . ) enthalten. 
Diese Fahigkeit zur Verallgemeinerung bzw. zur Einfuhrung wei- 
terer Parameter stellt einen besonderen Vorteil der Erfindung 
dar. Herkommliche Analysen von Bildszenen in angepafiten Wahr- 
nehmungsraumen sind haufig an einen bestimmten Effekt bei der 
Bildwahrnehmung angepaBt und nur beschrankt modif izierbar . Er- 
f indungsgemaB kann hingegen jeder neue Wahrnehmungsef f ekt durch 
Erhohung der Anzahl der "WENN-DANN-Regeln" , der iinguistischen 
Terme (Wahrnehmungsbenennungen) und/oder der Parameterzahl oder 
verschiedene Fuzzy-Regelungsverf ahren in den beim Fuzzy-Control 
eingefuhrten Vektoren berucksichtigt werden, ohne dafi die ur- 
sprunglichen Parameter verloren gehen und die bis dahin er- 
reichte PrSzision abnimmt. 
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Wegen der bevorzugten Anwendung als Sehhilfe wurde oben bei der 
Bildaufnahmeeinrichtung auf eine farbige Bildauf nahme auf der 
Basis von RGB-Arrays Bezug genommen. Die menschliche Retina 
enthalt drei Zapfenarten mit jeweils breitbandigen, sich uber- 
lappenden Spektren. Bei nicht-medizinischen Anwendungen kann 
jedoch ein Interesse bestehen, eine hohere Spektral-Auf losung 
einzufuhren, so daft statt einer RGB-Bildauf nahme eine Bildauf- 
nahme mit Spektren-Arrays mit einer grofteren Anzahl spektraier 
Empfindlichkeitsmaxima durchgefuhrt wird. Ferner kann statt der 
zweidimensionalen Bildaufnahme eine dreidimensionale Bildabta- 
stung Oder analog zur menschlichen Wahrnehmung die Bildaufnahme 
mit zwei Kameras unterschiedlicher Positionen (Paralaxe) vorge- 
sehen sein. Dadurch wird bei der Objekterfassung die Tiefenin- 
formation berucksichtigt . Bei der sprachkonvertierten Ergebnis- 
ausgabe konnen Zusatzinf ormationen zu den betrachteten Objek- 
ten, wie z.B. "links", "rechts", "oben", "unten", "Mitte", oder 
Informationen zur Beleuchtung (Richtung etc.)/ zu Objektmafien, 
Entfernungen oder Flachenanteilen von Objekten ausgegeben wer- 
den . 

Die erf indungsgemalie Farberkennung kann mit einer Schrif terken- 
nung kombiniert werden, z.B. unter Verwendung des Programms 
"Corel OCR-Trace". In diesem Fall erfolgt neben der Farbwahr- 
nehmungsausgabe auch eine Sprachausgabe erfafiter Worte in einer 
Bildszene (z.B. Schilder o. dgl.). 
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Patentansprliche 

Verfahren zur Ob jekterf assung, mit den Schritten: 

Daten- oder Bildauf nahme, bei der aus einer Abbildung 
einer Szene Bilddaten ermittelt werden, und 
Farbklassif izierung fur mindestens ein vorbestimmtes 
Objekt der Szene zur Ermittlung einer wahrgenommenen 
Objektfarbe, wobei ein fiir das gesamte Objekt im we- 
sentlichen konstanter, mittlerer Farbparameter mit 
einer Fuzzy-Control-Klassif izierung aller zum Objekt 
gehorenden Bildpunkte einer Farbklasse unter einer 
Vielzahl von Farbklassen in einem vorbestimmten 
Farbraum zugeordnet wird, wobei die zugeordnete Farb- 
klasse der Objektfarbe der visuellen Farbwahrnehmung 
des Objekts in der Szene entspricht. 

Verfahren gemaft Anspruch 1, bei dem zur Ermittlung des 
Objekts nach der Bildauf nahme eine Bildsegmentierung 
durchgefuhrt wird, bei der ausgehend von einem vorbe- 
stimmten Startpixel alle Bilddaten zu einem Objekt zusarri- 
mengefaftt werden, die sich in Bezug auf ein vorbestimmtes 
Farbmerkmal weniger als ein definierter Schweliwert von 
dem Farbmerkmal des Startpixels unterscheiden . 

Verfahren gemaB Anspruch 2, bei dem die Bilddaten nach 
der Bildaufnahme in einen fur die Segmentierung angepafi- 
ten Farbraum transf ormiert werden. 

Verfahren gemaB Anspruch 3, bei dem die Bilddaten nach 
der Bildaufnahme R-G-B-Daten umfassen, die zur Segmentie- 
rung in einen vorbestimmten Farbraum transformiert wer- 
den, wobei das zur Segmentierung betrachtete Farbmerkmal 
ein in diesem Farbraum gegebener Parameter ist, der iiber 



wo 00/13143 



32 



PCT/EP99/06240 



die Flache des betrachteten Objekts im wesentlichen un- 
veranderlich ist. 

5. Verfahren gemaB Anspruch 4, bei dem die Transformation in 
den HSL- Oder L*habC*ab~Raum erfolgt und das zur Segmentie- 
rung betrachtete Farbmerkmal der Farbton-Parameter des 
HSL- Oder L*habC*ab-Raume5 ist. 

6. Verfahren gemali Anspruch 4 oder 5^ bei dem, fails mit der 
Bildsegmentierung mit einem Farbmerkmal das betrachtete 
Objekt nicht abgegrenzt werden kann, weitere Farbmerkmale 
Oder Bildmerkmale wie z. B. Kanten beriicksichtigt werden. 

7. Verfahren gemSB Anspruch 6, bei dem die weiteren Farb- 
merkmale die Helligkeit und/oder die Farbsattigung umfas- 
sen. 

8. Verfahren gemali Anspruch 2, bei dem nach der Bildsegmen- 
tierung eine Segmentreduzierung zur Vereinf achung der 
geometrischen Gestalt des im Ergebnis der Bildsegmentie- 
rung ermittelten Objekts erfolgt. 

9. Verfahren gemaB Anspruch 1, bei der der mittlere Farbpa- 
rameter des Objekts vor der Klassif izierung einem Fuzzy- 
Clustering-Verf ahren unterzogen wird. 

10. Verfahren gemafi einem der vorhergehenden Anspruche, wobei 
zur Fuzzy-Control-Klassif izierung zur Ermittlung der 
Farbklasse des betrachteten Objekts weitere Farbeigen- 
schaften oder geometrische Eigenschaf ten des Bildes be- 
rucksichtigt werden. 



11. Verfahren gemali Anspruch 10, wobei zur Fuzzy-Control- 
Klassif izierung zur Ermittlung der Farbklasse des be- 
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trachteten Objekts die Farbeigenschaf ten des Umfeldes des 
Objekts beriicksichtigt warden, 

12. Verfahren gemaB einem der vorhergehenden Anspruche, bei 
dem nach der Klassif izierung der Objektfarbe eine Ergeb- 
nisausgabe zur Darstellung der ermittelten Farbklasse auf 
einer Anzeige oder in Audio-Form erfolgt. 

13. Verfahren gemaB einem der vorhergehenden Anspruche, das 
als Sehhilfe fur Personen mit einer Sehbehinderung oder 
Blinde verwendet wird. 

14. Verfahren gemaft einem der vorhergehenden Anspruche, bei 
dem zusatzlich zur Klassif izierung der Objektfarbe auch 
geometrische Eigenschaf ten mindestens eines Objekts der 
abgebildeten Szene erfaBt werden. 

15. Vorrichtung zur Objekterf assung, die eine Bildauf nahme- 
einrichtung (1) zur Bildauf nahme einer Szene, eine Daten- 
erf assungs-Einheit (2) zur Erzeugung von Bilddaten, eine 
Transformations- und Recheneinheit (3), eine Fuzzy- 
Recheneinheit (5) zur Ermittlung einer Farbklasse aus den 
Bilddaten und eine Datenausgabe (6) umfafit. 

16. Vorrichtung gemaB Anspruch 15, bei der eine Segmentie- 
rungseinheit (4) zur Auswahl eines vorbestimmten Objektes 
der Szene vorgesehen ist, das in der Fuzzy-Recheneinheit 
(5) einer Farbklassif izierung unterzogen wird. 

17. Verwendung einer Vorrichtung gemafi Anspruch 15 oder 16 
als Sehhilfe fur Personen mit einer Sehbehinderung oder 
Blinde . 
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18. Verwendung einer Vorrichtung gemaft einem Anspruche 15 
Oder 16 zur Realisierung des Verfahrens gemaft einem der 
Anspruche 1 bis 14. 
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Beschreibung 

[0001] Die vorliegende Erfindung betrifft eine tragbare 
Videokamera mil einem Kameragehause und einer Bilder- 
fassungseinrichtung, die wenigstens ein Objektiv und Hi Id- 5 
aufzeichnungsmittel aufweist. 

[0002] IVagbaie V^deokameras sind fiir den privaten und 
professioneilen Einsatz in unterschiediichsten Ausfiihrungs- 
fonnen bekannt. Moderne Videokameras, insbesondere di- 
gitale Videokameras konnen durch zunehmende Miniaturi- lO 
sierung der Bilderfassungseinrichtung, beispielsweise der 
Sensorchips und der Verarbeitungseleklronik und insbeson- 
dere der Speichermedien so kompakt konstruierl werden, 
dass sie vom Benutzer problemlos mil einer Hand gehalten 
und bedient werden konnen. Dazu weisen die Videokameras iS 
typischerweise am Gehause befestigte Halteschlaufen auf, 
die so angeordnet sind, dass der Benutzer die Kamera eigrei- 
fen und gleichzeitig die wichtigsten Bedienelemente zur 
Steuerung der Kamera mit seinen Fingem erreichen kann. 
Es sind auch Videokameras bekannt, die einen seitlich am 20 
Gehause angebrachten Handgriff aufweisen. 
[0003] Die bekannten tragbaren Videokameras weisen 
aber den Naciiteil auf, dass dem Benutzer mit herkommli- 
chen Haltevorrichtungen keine prazise Information iiber die 
Ausrichtung der Kamera, d, h. die Richtung, in welche die 25 
optische Aciise des Objektivs orientiert ist, vermittelt wird. 
Dieser Nachteil fallt ublicherweise nicht ins Gewicht, da die 
bekannten tragbaren Videokameras mit einem Bildschirm 
ausgestattet sind, der dem Benutzer die Kontrolle des abge- 
bildeten Bildfeldes ermdglicht. In Fallen; in denen eine vi- 30 
suelle Kontrolle des Bildfeldes aber nicht moglich ist, macht 
sich dieser Nachteil aber um so deutlicher bemerkbar. Es 
sind bereits Videokameras bekannt oder vorgeschlagen wor- 
den, die als Orienlierungs- und/oder Sehhilfen fiir sehbehin- 
derte oder blinde Menschen verwendet werden konnen. Bel- 35 
spielsweise konnen blinde Menschen eine Videokamera, die 
mit einer farbmetrischen Messeinrichtung versehen ist, zur 
Erkennung von Objektfarben verwenden. Die Kamera ist 
dann ublicherweise mit einem tragbaren Rechner verbun- 
den, an den ein Lautsprecher oder Kopfhorer angeschlossen 40 
wird, welcher die von der Messeinrichtung erkannte Objekt- 
farbe akustisch wiedeigibt. 

[0004] Ein modemes, beispielsweise auf Videobilderfas- 
sung basierendes Farberkennungssystem, das auch Umge- 
bungseinfliisse auf die Faibwahmehmung berucksichtigen 45 
kann, ist in der Intemationalen Patentanmeldung 
WO 00/13143 beschrieben. Damit sich Blinde mit einem 
solchen System zuverlassig orientieren konnen, ist es erfor- 
derlich, dass die beispielsweise von einem Lautsprecher 
oder Kopfhorer gemeldeten Farbinformationen vom Blin- 50 
den zuverlassig mit einer prazisen Raumrichtung korrelierl 
werden konnen. 

[0005] Der vorliegenden Erfindung liegt daher die Auf- 
gabe zugrunde, eine tragbare Videokamera anzugeben, die 
so ausgebildet ist, dass der Benutzer auch ohne visuelle 55 
Kontrolle eine zuverlassige Information liber die Ausrich- 
tung der optischen Achse der Kamera erhalt. 
[0006] Gelost wird diese Aufgabe durch die tragbare Vi- 
deokamera mit den Merkmalen des vorliegenden Anspruchs 
1. Vorteilhafte Weiterbildungen der erfindungsgemaBen Vi- 60 
deokamera sind Gegenstand der abhangigen Anspriiche. 
[0007] Die Erfindung betrifft demnach eine tragbare Vi- 
deokamera mit einem Kameragehause und einer Bilderfas- 
sungseinrichtung, die wenigstens ein Objektiv und Bildauf- 
zeichnungsmittei aufweist, welche dadurch gekennzeichnet 65 
ist, dass das Kameragehause als stabformiger Handgriff aus- 
gebildet ist, an dessen Stimseite das Objektiv angeordnet ist, 
wobei die optische Achse des Objektivs parallel zu der 
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Langsachse des Handgriffs verlault und dass der HandgrifT 
Bedienelemente zur Steuerung der Videokamera aufsveist, 
die so angeordnet sind, dass die Videokamera vom Benutzer 
mit einer Hand gehalten und bedient werden kann. 
[0008] Die erfindungsgemafie Videokamera ist in ihrer 
Allgemeinform ahnlich wie eine Stabtaschenlampe ausge- 
bildet und wird vom Benutzer auch wie eine Stabtaschen- 
lampe gehalten, d. h. der Benutzer umgreift das stabformige 
Gehause mit einer Hand, so dass das Kameragehause auf der 
Handinnenflache aufliegt. Durch das flachige Umgreifen des 
Kameragehauses ist die Orientierung der Kamera bezuglich 
der Orientierung der Hand eindeutig festgelegt. Da die opti- 
sche Achse des Objektivs parallel zu der Langsachse des 
stabfbrmigen Handgriffs verlauft, weiB der Benutzer auch 
ohne visuelle Kontrolle sehr prazise, in welche Richtung die 
Kamera in jedem AugenbUck gerichtet ist. Durch Anord- 
nung der Bedienelemente auf dem Handgriff k6nnen bei- 
spielsweise unterschiedlichste Funktionstasten mit dem 
Daumen bedient werden, ohne dass die Orientierung der Ka- 
mera beeinflusst wird. 

[0009] Unter einem stabformigen Handgriff ist im vorlie- 
genden Zusammenhang ein langlicher Griff zu verstehen, 
dessen Lange groBer, vorteilhaft wenigstens doppelt so 
groB, besonders bevorzugt aber wenigstens fiinfmal so groB 
wie seine groBte Abmessung senkrecht zur Langsachse ist. 
Der senkrecht zur Langsachse verlaufende Querschnitt des 
Handgriffs kann unterschiedliche Fonnen, beispielsweise 
im wesentlichen kreisformige, eine kreisformig abgeplat- 
tete, eine elliptische, eine quadratische oder rechteckige, 
ggf. abgerundete Allgemeinform aufweisen. 
[0010] Die Anordnung des Objektivs an der Stirnseite der 
Videokamera kann so erfolgen, dass das Objektiv, wie die 
Birne einer Stabtaschenlampe, unmittelbar in die Stimseite 
des Handgriffs integriert ist, so dass die optische Achse des 
Objektivs ini wesentlichen auf der Langsachse des Hand- 
griffs Hegt. AUerdings kann das Objektiv auch seitlich ver- 
setzt zur Langsachse des Handgriffs angeordnet sein und 
sich beispielsweise auf der an die Stimseite unmittelbar an- 
grenzenden Mantelflache des Handgriffs befinden. 
[0011] Die Bedienelemente sind vorzugsweise auf der 
Oberseite des Handgriffs angeordnet, wobei als Oberseite 
die Seite zu verstehen ist, auf der beim Ergreifen des Hand- 
griffs der Daumen aufliegt. Die Bedienelemente konnen un- 
terschiedliche Funktionstasten und Regler aufweisen, bei- 
spielsweise eine Auslosetaste, Selbstausloser, Belichtungs- 
regler, Tasten fiir WeiBabgleich und fiir Zoomfunktionen, 
usw. Die erfindungsgemaBe Kamera kann daher auch wie 
eine herkommliche Videokamera benutzt werden. Die Ta- 
stenfelder konnen beispielsweise als herkommliches Tasta- 
turmodul oder auch als folienartiges, druckempfindliches 
Sensorfeld ausgebildet sein, was eine besonders leichte und 
platzsparende Anordnung gewahrleistet. 
[0012] Die erfindungsgemaBe Kamera kann unterschied- 
lichste Ausgabeeinrichtungen umfassen. Bei Benutzung als 
herkQmmliche Videokamera ist vorteilhaft ein Monitor vor- 
gesehen, der beispielsweise als extemes Gerat angeschlos- 
sen oder auch als miniaturisierter Monitor in den Handgriff 
integriert sein kann. Der Monitor kann beispielsweise an der 
dem Objektiv gegenuberliegenden Stimseite des stabfbrmi- 
gen Handgriffs angeordnet und besonders vorteilhaft 
schwenkbar angelenkt sein, Es sind auch Projektionssy- 
steme denkbar, welche mittels einer Spezielbrille mit halb- 
durchlassigen Spiegeln ein Kamerabild und/oder andere In- 
formationen nach Art eines sog. Head-Up-Displays vor dem 
Auge darstellen. 

[0013] Insbesondere bei Verwendung als Sehhilfe fur seh- 
behinderte oder blinde Menschen umfasst die erfindungsge- 
maBe Videokamera einen Lautsprecher oder einen Kopfhd- 
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rer zur akustischen Wiedergabe der von der Bilderfassungs- 
einrichtung erkannten Bildinformationen. Je nacb Ausfiih- 
rung der Vldeokamera und der impiementierten Software 
konnen beispielsweise Faibinformationen, Entfemungsan- 
gaben, ObjektgroBen und -formen akustisch wiedergegeben s 
werden. Wenn beispielsweise eine Schrifterkennungssoft- 
ware impiementiert isl, kann der Lautsprecher auch zur Wie- 
dei;gabe eines erkannten Textes genutzl werden. In diesem 
Fall isl es auch moglich, ein oder mehrere acht-Punkt-Brail- 
lezeilenmodule auf dem HandgrifF anzuordnen, die eine er- lO 
kannle Schrift in Blindenschrift wiedergeben. Vorteilhaft 
weistjede Braillezeile wenigstens vierZeichen auf. Es kann 
auch ein Tastfeld vorgesehen sein, auf dem Bildbereiche, 
beispielsweise Objektumrisse mit Hilfe kleiner Stifle daige- 
stellt werden. Der Sehbehinderte kann die so daigestellten is 
Bildinformationen mit der Daumenwurzei und/oder der 
Handinnenflache ertasten. Derartige Braiilezeilenmodule 
oder Grafik-Stiftplattenmodule sind kommerziell beispiels- 
weise von der Firma Metec (Stuttgart, Deutschland) oder 
der japanischen Firma KGS Corp. erhaltlich. Die Stifte der 20 
Module werden uber Elektromagnete oder iiber Piezoele- 
mente angesteuert. 

[0014] Bei Verwendung ais Hilfsmittel fiir Sehbehinderte 
konnen die Bedienelemente beispielsweise als Funktionsta- 
sten zum Auslosen von Farbansagen, Entfemungsansagen, 25 
ObjektgroBenansagen oder zur Auslosung einer Schrifter- 
kennung oder Formerkennung, insbesondere zur Objekter- 
kennung oder auch zur Gesichtserkennung ausgestaltet sein. 
Entsprechende Bildverarbeitungssoftware ist bereits kom- 
merziell erhaltlich. Besonders vorteilhaft wird die Kamera 30 
in diesem Fall dann nicht im N^deomodus betrieben, son- 
dem in einem Einzelbildmodus, wobei die Einzelbilderf as- 
sung iiber entsprechende Tasten auf dem handgriffartigen 
Gehause ausgelost werden kann. Selbstverstandlich fallen 
unter den Begriff Videokamera irn Sinne der vorliegenden 35 
Erfindung auch Kameras, die uberhaupt keine herkommli- 
chen \^deomodus aufweisen, sondem nur zur Erfassung von 
Einzelbildem auf Anforderung des Benutzers ausgelegt 
sind. 

[0015] Die erfindungsgemafie Videokamera weist vor- 40 
zugsweise 1 bis 3 Objektive mit zugehoriger Bilderfas- 
sungseinrichtung auf, so dass beispielsweise bei einer Aus- 
fiihrungsfonn mil zwei Objektiven stereoskopische Video- 
aufzeichnung gewonnen werden konnen. Es kann auch we- 
nigstens ein Mikrofon zur Spracheingabe, beispielsweise 45 
zur Sprachsteuerung der wichtigsten Kamerafunktionen, 
oder zur Messung von Hinlergrundgerauschen vorgesehen 
sein. 

[0016] Zur automatische Wiedergabe von Objektfarben, 
Objektkonturen und Schriften ist die erfindungsgemaBe Vi- 50 
deokamera mit einer Rechnereinheit ausgeriistel, auf dem 
die Bildverarbeitungssoftware impiementiert ist. Vorteilhaft 
ist der Rechner in den das Kameragehause bildenden Hand- 
grifF integriert. Damit die Kamera aber leicht und handlich 
gestaltet werden kann, ist es auch moglich, die Rechnerein- 55 
heit als separates Modul auszubilden, das vom Benutzer in 
einer separaten Tasche getragen werden kann und das iiber 
eine Datenkabel oder drahtlos mit der Videokamera verbun- 
den ist. 

[0017] Gegenstand der vorliegenden Erfindung isl 60 
schlieBlich auch die Verwendung einer derartigen slabformi- 
gen Videokamera als Seh- oder Orientierungshilfe fiir Seh- 
behinderte. 

[0018] Die Erfindung wird im Folgenden unter Bezug- 
nahme auf ein in der beigefugten Zeichnung dargestelltes 65 
Ausfiihrungsbeispiel naher erlautert: 
[0019] Die Figur der Zeichnung zeigt dabei schematisch 
eine bevorzugte Ausfdhningsform der erfindungsgemMfien 



Iragbaren Videokamera. 

[0020] Die erfindungsgemaBe Videokamera 10 weist ein 
als stabfbrmiger Handgriff 11 ausgebiidetes Kameragehause 
auf, an dessen Stimseite 12 ein Objektiv 13 angeordnet ist. 
Die optische Achse 14 des Objekdvs 13 verlauft parallel zur 
Langsachse 15 des Handgriffs 11. In den HandgrifF 11 sind 
Bedienelemente 16, 17, 18, 19 zur Steuerung der Videoka- 
mera 10 und Ausgabeeinrichtungen 20,21, 22, 23 zur Aus- 
gabe der von der Bilderfassungseinrichtung erkannten Bild- 
information und/oder auch zur akustischen, sensorischen 
oder visuellen Bestatigung der vom Benutzer durchgefiihr- 
len Steuerungsfunklionen vorhanden. AuBerdem ist, vor- 
zugsweise ebenfalls im Sdrnbereich 12 der Kamera, ein Mi- 
krophon 24 angeordnet Die Ausgabeeinrichtung umfasst im 
dargestellten Beispiel einen extemen Monitor 20, einen 
Lautsprecher oder Kopfhorer 21, ein sensorisches Tastfeld 
22, auf dem erkannte Bildbereiche mit Hilfe kleiner Stifte 
dargestellt werden, sowie ein Acht-Punkt-Braillezeilenmo- 
dul 23, die im dargestellten Beispiel vier Zeichen wiederge- 
ben kann. Das Braillezeilenmodul 23 kann auch seitlich am 
HandgrifF 11 oder auf der Unterseite des Handgriffs ange- 
ordnet sein. Der Monitor 20 kann auch in die Kamera inte- 
griert sein. Beispielsweise kann er als ausschwenkbares 
Bauelement an der dem Objektiv gegeniiberliegenden Stim- 
seite 25 des HandgrifFs angeordnet sein. 
[0021] Die Bedienelemente weisen einen Regler 16 zur 
Einstellung der Lautstarke des Lautsprechers und Messta- 
sten 17, 18 fiir Einzel- und Dauermessungen auf. AuBerdem 
ist ein Funktionstastenfeld 19 vorgesehen, das je nach An- 
wendungsfall mit unterschiedlichen Funktionen belegt ist. 
[0022] Je nach Art und Komplexitat der fur die jeweilige 
Aufgabe erforderiichen Rechenleistung, beispielsweise 
wenn komplexen Bild- oder Schrifterkennungsaufgaben er- 
fuilt werden miissen, kann es vorteilhaft sein, die Kamera 
iiber eine drahtlose oder drahtgebundene Datenverbindung 
26 mit einem extemen, tragbaren Rechnermodul 27 zu kop- 
peln, so dass die Kamera selbst leicht und handlich bleibl. 

Patentanspriiche 

1. Tragbare Videokamera mit einem Kameragehause 
und einer Bilderfassungseinrichtung, die wenigstens 
ein Objekdv und zugeordnete Bildaufzeichnungsmittel 
aufweist, dadurch gekennzeichnet, 

dass das Kameragehause als stabformiger HandgrifF 
(11) ausgebildet ist, an dessen Stimseite (12) das Ob- 
jektiv (13) angeordnet ist, wobei die optische Achse 
(14) des Objektivs (13) parallel zu der Langsachse (15) 
des Handgriffs (11) verlauft; und 
dass der HandgrifF (11) Bedienelemente (16, 17, 18, 
19) zur Steuerung der Videokamera aufweist, die so an- 
geordnet sind, dass die Videokamera (10) vom Benut- 
zer mit einer Hand gehalten und bedient werden kann. 

2. Videokamera gemSB Anspruch 1, dadurch gekenn- 
zeichnet, dass die Bedienelemente eine Funktionsta- 
stenfeld (19) umfassen. 

3. Videokamera gemaB Anspruch 2, dass das Funkti- 
onstastenfeld (19) als druckeinpfindliche elektrome- 
chanische Folic ausgebildet ist. 

4. Videokamera gemaB einem der Anspriiche 1 bis 3, 
dadurch gekennzeichnet, dass der PlandgrifF (11) we- 
nigstens eine Ausgabeeinrichtung (20, 21, 22, 23) auf- 
weist, 

5. Videokamera gemaB Anspruch 4, dadurch gekenn- 
zeichnet, dass die Ausgabeeinrichtung einen Monitor 
(20) und/oder wenigstens einen Lautsprecher (21) um- 
fasst 

6. Videokamera gemafi einem der Anspriiche 4 oder 5, 
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daduTch gekennzeichnel, dass die Ausgabeeinrichtung 
wenigstens ein Tastfeid (22) und/oder wenigstens eine 
8-Punki-Braillezeile umfasst. 

7. Videokamera gemaB einem der vorhergehenden 
Anspruche, dadurch gekennzeichnel, dass die Bilder- 5 
fassungseinrichtung zwei Objektive (13) und zugeord- 
nete Bildaufzeicbnungsmittel zur stereoskopischen 
Bilderfassung umfasst. 

8. Videokamera gemaB einem der vorhergehenden 
Anspriiche, dadurch gekennzeichnel, dass auBerdem lO 
eine Rechnereinheit (27) zur Bildauswertung vorgese- 
hen ist. 

9. Verwendung der Videokamera gemaB einem der 
Anspruche 1 bis 8 als Seh- und/oder Orientierungshilfe 
fur Sehbehinderte oder Blinde. 15 
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